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Методы синтеза нейросетевых 

и нейро-нечетких распознающих 
моделей с линеаризацией и факторной 
группировкой признаков 


Предложены новые методы синтеза логически прозрачных нейронных и нейро-нечетких классифицирующих 
моделей в неитеративном режиме. Разработанные методы позволяют решать задачи автоматизации процессов 
принятия решений в технической и биомедицинской диагностике, распознавании образов. 


Введение 


Искусственные нейронные и нейро-нечеткие сети находят широкое применение 
в задачах распознавания образов, технической и биомедицинской диагностики, 
экономического моделирования, поскольку позволяют автоматизировать процесс 
принятия решений и способны к обучению по точечным данным. 

Несмотря на значительное количество моделей нейронных и нейро-нечетких 
сетей, известных в настоящее время [1-5], их использование на практике, особенно в 
задачах диагностики, осложняется недостаточно высоким уровнем логической 
прозрачности (трудностью для анализа и восприятия человеком) нейросетей, а также 
длительностью процесса итеративной оптимизационной настройки весов. 

Поэтому актуальной является разработка моделей нейронных и нейро-нечетких 
сетей, обладающих высоким уровнем логической прозрачности, а также неитера- 
тивных методов их синтеза. 

Ранее были предложены модели и методы синтеза логически прозрачных 
нейронных и нейро-нечетких сетей с настройкой весов в неитеративном ре- 
жиме [5-11], которые основывались на использовании разбиения диапазона значений 
признаков на интервалы с монотонным номером класса для настройки параметров 
функций принадлежности нечетких термов (для случая нейро-нечетких сетей) и 
весовых коэффициентов нейронов, а также топологии сети. При этом не учитывались 
взаимосвязи признаков. 

Цель данной работы — создание методов, позволяющих синтезировать нейронные 
и нейро-нечеткие модели в неитеративном режиме с линеаризацией, факторной груп- 
пировкой и сверткой признаков. 


Постановка задачи синтеза нейронных 
и нейро-нечетких моделей 


Пусть мы имеем обучающую выборку <х, у>, состоящую из множества 
экземпляров {х*} = {х*}, = 1,2, ...,5,] =1,2,..., М, где $ — количество экземпляров 
в выборке, М — количество признаков, характеризующих экземпляры, х’; — значение 
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]-го признака, характеризующего 5-й экземпляр выборки х’, и набора значений 
целевого (выходного) признака у = {у}, сопоставленных каждому экземпляру 
выборки, где у`— значение целевого признака для экземпляра х°. 

Тогда задача синтеза модели зависимости У(х) по выборке <х, у> на основе 
нейронной (нейро-нечеткой) сети заключается в определении количества нейроэлементов 
в сети, задании их дискриминантных (постсинаптических, весовых) и активационных 
функций, определении топологии сети и расчете весовых коэффициентов межнейронных 
связей. 


Анализ информации о признаках 
и топологии обучающей выборки 


Для синтеза логически прозрачных нейромоделей в неитеративном режиме 
целесообразно проводить анализ информации о признаках и топологии обучаю- 
щей выборки, для чего предлагается выполнять следующую последовательность 
шагов. 

Шаг 1. Задать обучающую выборку <х, у>. Задать пороговое значение гнорог, 
0<Гнорог.<1. Рассчитать логарифмы значений признаков для всех экземпляров 


и расширить набор признаков х: х°;+: = ш(х\), | = 1,2, ..., №1=1,2, ..., М, 
3=1,2, ..., 5. 

Шаг 2. Найти минимальные пт(х;) и максимальные тах(х;) значения признаков. 
Пронормировать значения признаков для 1 = 1,2, ..., 2М, $ =1,2,..., $: 


5 . 
х› — шш(х; ) 
х$ — 1 1 


г тах(х;)- пи; 


Шаг 3. Найти коэффициенты, характеризующие тесноту связи признаков и их 
логарифмов, гу, 1,] = 1,2, ..., 2М. Например, коэффициенты парной корреляции: 


Шаг 4. Сгруппировать признаки. 

Шаг 4.1. Установить количество групп признаков: © = 0. 

Шаг 4.2. Найти в матрице г={г;} элемент с максимальным по модулю значе- 
нием: Гиах = Шах(|г;|), 1=1,2,..., 2М, ] =1+1,..., 2М. Определить знак гу. 

Шаг 4.3. Если Гиах < Гиорог., ТО перейти на шаг 4.5. 

Шаг 4.4. Если Гиах > Гпорог. ТО выполнить шаги 4.4.1 — 4.4.4. 

Шаг 4.4.1. Установить: @ = С + 1, В(С,1) = 1, Б(С, ]) = 1. 

Шаг 4.4.2. Для всех К =1,2,..., 2М, КЕЬКЕНМ, КНМ, КЕ, К=]-+М, КЕ] -М: 

если [Е] > Гпорог. И [Ек| > Гпорог. ТО Установить: В(С, К) = 1, тр = 0, гк=0,р= 1,2, ..., 2№. 

Шаг 4.4.3. Установить: г» = 0, ги = 0, гр = 0, т;=0, р=1,2, ..., 2№. 

Шаг 4.4.4. Перейти на шаг 4.2. 
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Шаг 4.5. Если Эр; ты 0, №0 р=1,2, ..., 2М,1=1,2,..., М] р, тогда 
принять: С = С + 1, В(С,]) = 1, тк = 0, 1 =0, К =1,2, ..., ‚2№, перейти на шаг 4.5, в 
противном случае — перейти на шаг 4.6. 

Шаг 4.6. Установить |(е, 1) = 0, для всех © = 1,2, ..., @,1=1,2,..., 2М, для 
которых значение [(©, 1) не было установлено. 

Шаг 4.7. Для У],]=1,2, ..., №, установить: 


_ [0,1= 1,38 : 6, ]) =1,1< М; 
1 Мам 


Шаг 4.8. Для] =М+1,..., 2М, #=1,2,..., @, установить: В(®, } — №) = 1, В(е, }) = 0. 

Шаг 5. Найти коэффициенты [, характеризующие тесноту связи признаков и 
номера класса, такие, что 0 < Г; < 1, и с увеличением значения [; возрастает 
значимость признака для определения класса. Для этого можно использовать методы, 
рассмотренные в [5]. 

Шаг 6. Выполнить кластер-анализ обучающей выборки: разбить ее на кластеры 
С1, а = 1,2, ....О, где О — количество кластеров, определить координаты центров 
кластеров С1;, | = 1,2, ..., №, а = 1,2, ..., О. Кластер-анализ можно выполнить, 
используя методы [2, 12]. Определить четкую принадлежность кластеров к каждому 
из К классов. 

Шаг 7. Разбить ось значений каждого признака на О интервалов (термов) и 
определить их параметры для синтеза нейронных и нейро-нечетких сетей. 

Шаг 7.1. Установить номер текущего признака: 1 = 1. 

Шаг 7.2. Если 1 > М, тогда перейти на шаг 7.6, в противном случае — перейти на 
шаг 7.3. 

Шаг 7.3. Установить номер текущего интервала значений текущего признака 4 = 1. 

Шаг 7.4. Если 4 > О, тогда перейти на шаг 7.5, в противном случае — уста- 
новить для текущего 4: 


у=аге шш {х;|9°=9}, и=аге шах {х; |а°=4}, 
С $=1:2...; 
ка,а) т: У, О(ьа) = 4’, а(1,9) = ат Ыьа) = хо с(1, 9) = СЯ . 
Принять: 4 = а +1. Перейти на шаг 7.4. 
Шаг 7.5. Принять: 1=1+1. Перейти на шаг 7.2. 
Шаг 7.6. На основе параметров К(1,4) и О(1,4) определить К(]) и О(]) — номера 
класса и кластера для ]-го терма, ] = 1,2, ..., МО: 


ко-ка + (0-1 490), (0+ О шоа О) - 1)), О/=О( + (9-1) м0), (9+ 1) шов О) - 1). 
Шаг 8. Задать функции принадлежности распознаваемого экземпляра к нечет- 
ким термам. Для этого предлагается использовать трапециевидные функции: 


0, х; < 0,5(а(1, а) + Ба, а-1)), 
х; - 0,5(а(1, а) + 6а,а-1)) 
0,5(а(1, а) - 5 а-1)) 
м; а (Х:) =11, а, 9) <х; < 59), 
0,5(а(1, а+1) +54, 4))-х; 156 
0,5(а(1, а+1) -Ъа, а)) 
0, 0,5(6(, 4) + аа, а+1))<х;, 


, 0,5(а(1, 9) + Ы, Ч- 1) - Хх; < а(1, 9), 


‚ 4) <х; < 0,5(6 (а, а) + а, а+1)), 
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либо П-образные функции: М; а (х:) = Мас ОМ, СО, где м; а(х;) - функция 
принадлежности распознаваемого экземпляра по признаку х! к 4-му терму 1-го 
признака, м; ах (х;) — 5-образная функция, а м; йе (х; ) — (-образная функция: 


0, Хх; < 0,5(а(1, 9) т Е, ЯЧ- 1)), 


11 х; —а(1, а) : . у 
| И ‚ 0,5(а(1, а) + Ба, а-1))<х; <а(1ь9), 
м5 О р (а(1, 4) + 5.а-1)) <х; <а(ь9) 
1х; >а(, 9); 
1, х; < а), 
1 1 х; — Е, а) . ь : 
; ;) = + 6 ‚9 = ; <0,5(Б > га > | 2 
маи (4) =15 т (5х; 50,569) +а0,а+1) 


0, х; > 0,5(БА, 9) + а, а+1)), 
либо треугольные функции: 
0, х; <а(1, 4), 

0, х; > 61, а), 
х; —а(, 9) 
с(, 9) — а, 9))° 
х; — 60,9) 
ы 9-59)’ 


либо функции Гаусса: М; а (х; ) =ехр\- (х; — с(!, а)? } 


муа(Х:) = а(1, а) <х; < с(1, 9), 


(1,9) <х; < 50,9), 


Синтез нейронной сети 


На основе результатов проведенного анализа информации о признаках по обучающей 
выборке может быть синтезирована нейронная сеть прямого распространения (рис. 1). 


Рисунок 1 — Схема нейронной сети 
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Нейроны первого слоя сети осуществляют нормирование входных сигналов, 
отображая их в диапазон [0, 1], а также выполняют, где это необходимо, логариф- 
мирование нормированного сигнала. 

Нейроны второго слоя группируют преобразованные нейронами первого слоя 
сигналы и находят взвешенную сумму сигналов группы с учетом оценок их 
индивидуального влияния на выходной признак (номер класса). 

Нейроны третьего слоя сети определяют расстояния от распознаваемого 
экземпляра до центров кластеров в пространстве сгруппированных сигналов и 
находят значение функции Гаусса, аргументом которой является определенное 
расстояние. 

Нейроны четвертого слоя соответствуют классам и выдают на выходе значение 
«1», если распознаваемый экземпляр относится к соответствующему классу, и «0» — 
в противном случае. 

Дискриминантные функции нейронов сети будут задаваться формулами: 

Ц [09х09 - 0 +900, 1=1,2,..., № 


ы 


ее. 


М 
21) [1,20 2) | „аз (1) 
Ц 5 "х 5} а +2. их, 
= 


[© 
ц.2 (2, х65)- Уре - хо}. о 
Е 


и ват о а 
4 (, 4) х@л }- бух 
Ге 


— 


| И 
(1) (1,1) х@) 

где ц \ ‚Хх — дискриминантная (постсинаптическая, весовая) функция 1-го 

нейрона з -го слоя, (8) — набор весовых коэффициентов 1-го нейрона з -го слоя, 


1 3,1 3,1 в . | © 
(8) = [> №: » ). весовой коэффициент ]-го входа 1-го нейрона з -го слоя, 
! : .. й 3,1 3,1 з 
х (1) — набор входов 1-го нейрона з -го слоя, х 81) = = : } х И) _ значение на }-0м 
входе 1-го нейрона з -го слоя нейронной сети. 
Функции активации нейронов будут задаваться формулами: 


обе 1=1,2...№ 
ш(х), 2; =1, 


: : 2 
О бе О ЕО: 


где ш@>(х) — функция активации 1-го нейрона з -го слоя нейросети. 
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Весовые коэффициенты нейронов сети предлагается рассчитывать по формуле: 
1+ ть [тах ) - шибь)ор=1+ М: =13 = =1.2,...№,1=0; 
пайа(х )(тах(х )- ших), о; =0,3 =1,1=1,2,...№=0; 
(пахСь) - шибь) рем =153 =11=1,2,...М}=1; 

(пах(х)- шна(х)) 5; м 
0,3 =11=1,2,...М,1=0; 

х 8) 1 ь@,)2@)а; =0,3 =21=1,2,..,6,}=1,2,..№ 
(12711865) а; =13=21=1,2,...6,}=1,2,./№ 
Су,з =3,1=1,2....0,1=1,2....С; 

И 
1, СЛЕК;,з =4,1=1,2,...К,}=1,2,...О; 
-1 СТЕК, 3=4,1=1,2,...К,]=1,2,....О; 


Х -1 
2(1) = [лью ь] 


К= 


Синтез нейро-нечетких сетей 


Наряду с синтезом четких нейросетей прямого распространения информация, 
полученная в результате анализа информации о признаках, может быть использована 
для синтеза шестислойной (рис. 2) и пятислойной (рис. 3) нейро-нечетких сетей. 


Рисунок 2 — Схема шестислойной нейро-нечеткой сети 


Первый и второй слои обеих нейро-нечетких сетей будут эквивалентны 
соответствующим слоям вышеописанной нейронной сети. 
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Нейроны третьего слоя обеих сетей осуществляют вычисление значений 
функций принадлежности распознаваемого экземпляра к нечетким термам признаков. 

Нейроны четвертого слоя шестислойной сети осуществляют объединение не- 
четких термов в кластеры, а нейроны пятого слоя объединяют принадлежности 
экземпляра к кластерам в принадлежности к классам. 

Нейроны четвертого слоя пятислойной сети осуществляют непосредственное 
объединение нечетких термов в классы без кластерной группировки. 

Единственный нейрон последнего слоя обеих сетей осуществляет объединение 
принадлежностей к классам и дефаззификацию результата. 


в 
< 
ИА 


— 
> 
ИХ 


МИХ ИА 


= 
Г \ д 


иииииинннниие 
- © 


ГА 


Рисунок 3 — Схема пятислойной нейро-нечеткой сети 


Дискриминантные функции нейронов шестислойной нейро-нечеткой сети 
будут задаваться формулами: 


Е | аль. ._ . 
Ц (м ок = пла м ие Г Пи ОЕ М 


5 51) __ (51 . 51) __ (51 г ; . 
ц (м ох о) = па м И к и И < ЕО 


(6,1) (6,1) 


6,1 РЕ р 6,1 6,1 ый 
} (№ сх ›) = п м —. о аыю 


ц ] ] 


где №. - количество нейронов в з -ом слое сети. 


Функции активации нейронов шестислойной нейро-нечеткой сети будут за- 
даваться формулами: 


ше (ц“®) = пах {цб ы 1= 1, 2, 4.9 О, ] = 1, 2, {2 №; 


] 


5 5 5 И я В 
ш (кц ”) = тах {Ц Г ‚1=1,2,...К,]=1,2,..., О; 
3 
шо (>) = аго тах {цб ‚]=1,2,...,К. 
] 
Весовые коэффициенты нейронов шестислойной нейро-нечеткой сети будут 
определяться по формуле: 
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Оо Ома 
0,0) #13 =4,1=1,2,...0,$=12,..№; 
9 = ОКО: 


ке а О 
0,3 =6,1=1,]=1,2,..., К. 
Дискриминантные функции нейронов пятислойной нейро-нечеткой сети будут 


задаваться формулами: 


Ще (хе) = пох], 1=12,...К,]=1,2,..., №; 


(5,1) 5,0 6,0} — и; (5,1) + (5,10) рае 
ц; (№ 5х; = пода {м 5х; |, 1=12, ...,К, 


где №. - количество нейронов в з -ом слое сети. 


Функции активации нейронов шестислойной нейро-нечеткой сети будут 
задаваться формулами: 
® (ц“®) = тах {91 ,1=1,2,...К,]=1,2,..., №; 
] 


И 
ше) (ц°”) — ат тах Е ,‚]=1,2,.... К. 


Весовые коэффициенты нейронов шестислойной нейро-нечеткой сети будут 
определяться по формуле: 
Е = О РР 
И ао. 
а о 


Заключение 


В работе предложены новые методы неитеративного синтеза логически 
прозрачных нейронных и нейро-нечетких сетей. Предложенные методы позволяют 
на основе обучающих выборок данных создавать структуру нейронных и нейро- 
нечетких сетей, а также настраивать их параметры без оптимизационной подгонки 
весов, и могут быть рекомендованы для применения при решении задач диагностики 
и распознавания образов по признакам. 
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С.0. Субботин 

Методи синтезу нейромережних 1 нейро-нечтких розшзнавальних моделей з лнеаризащею 
1 факторним групуванням ознак 

Запропоновано нов! методи синтезу ломчно прозорих нейронних 1 нейро-нечтких класифжуючих 
моделей у натеративному режим:. Розроблен! методи дозволяють вирппувати завдання автоматизаци 
процесв прийняття рипень у техн1чейй та б1омедичейй д1агностиц, розшзнаванн! образив. 


5.А. Зибфойт 

Ме#о495 оГ пешга! ап пеиго-Га77у гесосшише то4де зупе$5$ УНП Геабиге Ппеан7айоп 
апд Ёасог огоиршо 

ТБе пе\ поп-{егайуе те#о4$ о# ]озлсаПу Напзрагеп! пейга| ап пеиго-Ёатту с1аззуте то4е| зупе$1$ 
атге оЁегед. Тве 4еуе]оре4 тей о45 аПо\ ю аиютайте Ше 4ес151оп таКше ргосеззез ш {1есбшса| ап4 
Боте4!са1 Фазпозйсз, ш райегп гесоэтйоп. 


Статья поступила в редакцию 04.09.2007. 


«Штучний 1нтелект» 12008 173 


